eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0585    recall@10 : 0.0882    recall@20 : 0.1247    recall@50 : 0.1916    mrr@5 : (0.0346+0j)    mrr@10 : (0.0387+0j)    mrr@20 : (0.0413+0j)    mrr@50 : (0.0436+0j)    ndcg@5 : (0.0399+0j)    ndcg@10 : (0.0495+0j)    ndcg@20 : (0.0589+0j)    ndcg@50 : (0.0724+0j)    hit@5 : 0.0611    hit@10 : 0.0922    hit@20 : 0.1306    hit@50 : 0.2013    precision@5 : 0.0123    precision@10 : 0.0093    precision@20 : 0.0066    precision@50 : 0.0041
Test result:
recall@5 : 0.061    recall@10 : 0.09    recall@20 : 0.1273    recall@50 : 0.1905    mrr@5 : (0.0359+0j)    mrr@10 : (0.0399+0j)    mrr@20 : (0.0426+0j)    mrr@50 : (0.0447+0j)    ndcg@5 : (0.0413+0j)    ndcg@10 : (0.0507+0j)    ndcg@20 : (0.0603+0j)    ndcg@50 : (0.0731+0j)    hit@5 : 0.064    hit@10 : 0.0949    hit@20 : 0.1347    hit@50 : 0.2012    precision@5 : 0.0129    precision@10 : 0.0096    precision@20 : 0.0069    precision@50 : 0.0042

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.059    recall@10 : 0.0894    recall@20 : 0.1249    recall@50 : 0.1912    mrr@5 : (0.0348+0j)    mrr@10 : (0.039+0j)    mrr@20 : (0.0415+0j)    mrr@50 : (0.0438+0j)    ndcg@5 : (0.0402+0j)    ndcg@10 : (0.05+0j)    ndcg@20 : (0.0591+0j)    ndcg@50 : (0.0726+0j)    hit@5 : 0.0614    hit@10 : 0.0933    hit@20 : 0.1312    hit@50 : 0.2009    precision@5 : 0.0124    precision@10 : 0.0094    precision@20 : 0.0067    precision@50 : 0.0041
Test result:
recall@5 : 0.0603    recall@10 : 0.0911    recall@20 : 0.1282    recall@50 : 0.1909    mrr@5 : (0.036+0j)    mrr@10 : (0.0403+0j)    mrr@20 : (0.043+0j)    mrr@50 : (0.0451+0j)    ndcg@5 : (0.0412+0j)    ndcg@10 : (0.0513+0j)    ndcg@20 : (0.0608+0j)    ndcg@50 : (0.0735+0j)    hit@5 : 0.0636    hit@10 : 0.0961    hit@20 : 0.1357    hit@50 : 0.2017    precision@5 : 0.0128    precision@10 : 0.0097    precision@20 : 0.0069    precision@50 : 0.0042

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0555    recall@10 : 0.0853    recall@20 : 0.1213    recall@50 : 0.188    mrr@5 : (0.032+0j)    mrr@10 : (0.036+0j)    mrr@20 : (0.0387+0j)    mrr@50 : (0.0409+0j)    ndcg@5 : (0.0373+0j)    ndcg@10 : (0.0469+0j)    ndcg@20 : (0.0561+0j)    ndcg@50 : (0.0695+0j)    hit@5 : 0.0576    hit@10 : 0.0887    hit@20 : 0.1271    hit@50 : 0.1974    precision@5 : 0.0116    precision@10 : 0.0089    precision@20 : 0.0064    precision@50 : 0.004
Test result:
recall@5 : 0.0578    recall@10 : 0.0852    recall@20 : 0.1202    recall@50 : 0.1838    mrr@5 : (0.0347+0j)    mrr@10 : (0.0385+0j)    mrr@20 : (0.041+0j)    mrr@50 : (0.0431+0j)    ndcg@5 : (0.0397+0j)    ndcg@10 : (0.0486+0j)    ndcg@20 : (0.0576+0j)    ndcg@50 : (0.0704+0j)    hit@5 : 0.0603    hit@10 : 0.0895    hit@20 : 0.1266    hit@50 : 0.1937    precision@5 : 0.0121    precision@10 : 0.009    precision@20 : 0.0064    precision@50 : 0.004

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0551    recall@10 : 0.0828    recall@20 : 0.1201    recall@50 : 0.1869    mrr@5 : (0.032+0j)    mrr@10 : (0.0357+0j)    mrr@20 : (0.0384+0j)    mrr@50 : (0.0407+0j)    ndcg@5 : (0.0372+0j)    ndcg@10 : (0.0462+0j)    ndcg@20 : (0.0557+0j)    ndcg@50 : (0.0692+0j)    hit@5 : 0.0573    hit@10 : 0.0862    hit@20 : 0.1258    hit@50 : 0.1965    precision@5 : 0.0115    precision@10 : 0.0087    precision@20 : 0.0064    precision@50 : 0.004
Test result:
recall@5 : 0.0563    recall@10 : 0.0846    recall@20 : 0.1188    recall@50 : 0.1846    mrr@5 : (0.0339+0j)    mrr@10 : (0.0377+0j)    mrr@20 : (0.0403+0j)    mrr@50 : (0.0424+0j)    ndcg@5 : (0.0388+0j)    ndcg@10 : (0.0479+0j)    ndcg@20 : (0.0567+0j)    ndcg@50 : (0.0699+0j)    hit@5 : 0.0591    hit@10 : 0.0887    hit@20 : 0.1249    hit@50 : 0.1947    precision@5 : 0.0119    precision@10 : 0.009    precision@20 : 0.0063    precision@50 : 0.004

